Năm 257 TCN, Tần sai Vương Hột (王齕) vây Hàm Đan. Nước Triệu muốn giết Dị Nhân. Dị Nhân cùng Lã Bất Vi mưu đưa sáu trăm cân vàng cho kẻ coi giữ nên trốn thoát khỏi nước Triệu. Nước Triệu lại định giết vợ con Dị Nhân, nhưng Triệu Cơ là con nhà tai mắt ở Triệu, lẩn trốn được vì thế mẹ con đều sống.

Do Hoa Dương phu nhân là người nước Sở, Dị Nhân đổi tên là Tử Sở (子楚). Năm 251 TCN, Tần Chiêu Tương vương mất, cha ông là An Quốc Quân lên làm vua, tức là Tần Hiếu Văn vương, lập Hoa Dương phu nhân làm hoàng hậu, Tử Sở làm thái tử. Vua Triệu cũng cho đưa vợ của Tử Sở cùng con là Chính về nước Tần. Nhưng Hiếu Văn vương lên ngôi được 3 ngày đã mất.

Thái tử Tử Sở lên thay, tức là Tần Trang Tương Vương, tôn mẹ nuôi là Hoa Dương hậu làm Hoa Dương thái hậu, mẹ là Hạ Cơ là Hạ thái hậu, lập Triệu Cơ làm hậu, Doanh Chính làm thái tử, phong Lã Bất Vi làm thừa tướng (249 - 235 TCN)